SpiderMesh: Spatial-aware Demand-guided Recursive Meshing for RGB-T Semantic Segmentation

分享人：刘劲夫
研究方向：语义分割
论文题目：SpiderMesh: Spatial-aware Demand-guided Recursive Meshing for RGB-T Semantic Segmentation
论文作者：Siqi Fan, Zhe Wang, Yan Wang, Jingjing Liu
作者单位：清华大学
论文摘要：对于城市场景理解中的语义分割，单独使用RGB相机通常无法捕获清晰的整体拓扑，尤其是在具有挑战性的照明条件下。热信号是一个信息丰富的附加通道，可以揭示低质量RGB图像中模糊区域的轮廓和细粒度纹理。针对RGB-T（热）分割，现有方法要么使用简单的被动通道/空间融合进行跨模态交互，要么依赖模糊边界的重标记进行细粒度监督。我们提出了一种空间感知需求引导递归网格划分（SpiderMesh）框架：1）通过需求引导目标掩蔽算法主动补偿光学受损区域中不充分的上下文语义； 2）通过递归网格细化多模态语义特征，提高像素级语义分析性能。 我们进一步引入了一种非对称数据增强技术M-CutOut，并使半监督学习能够充分利用实际使用中稀疏可用的RGB-T标签。 在MFNet和PST900数据集上进行的大量实验表明，SpiderMesh在标准RGB-T分割基准上实现了最新的性能。
原文链接：

点击此处